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Николай Кувыркин 


Зепюг АгспКес{ @ КаШе!$еп 


® Более 20 лет в разработке 
® С начала 2000-х в бэкенде, основной опыт связан с базами 
данных. 
® Биллинг для первых М/Е! хот-спотов в Москве (отели Майо() 
® 10 лет работал в Лаборатории Касперского 
® распределённая файловая система К1ОР$ 
» облачная система детектирования файлов \/ПКен$Ипв 
® Последние 3 года работаю в СотрйЙапсе Райффайзенбанк 
® КУС — система автоматического обновления данных 
клиентов банка 
® ЧагКМС — система обработки потока платежей 


(но) ННЕоаа"" 


История: зачем нужен этот проект 


. Чагк — СКМ для офицеров Сотрйапсе 


* Большой поток платежей —»› необходимость автоматических 
решений 


. Большая нагрузка, высокие требования к скорости обработки 
* Сложная логика правил —› МЕ 
. Автоматические решения -› новая система 


(но) ННЕоаа"" 


Требования 


.Высокая степень параллелизма 

* Стабильное время ответа в широком диапазоне нагрузок 
. Максимальная “наблюдаемость” системы 

. Легкая и быстрая модификация бизнес-логики 
*Возможность ретро-тестирования 

. Обновление всех частей системы без простоя 

. Масштабирование 


(но) ННЕоаа"" 


Обработка платежа 


Получение данных 
Обогащение данных 


Обработка моделью 
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Обработка платежа 


Платформа 


Получение данных 
Обогащение данных 


р 


Модель 


Обработка моделью 
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Архитектура 


МО ВгоКег$ 


НЕ) НЕНГоаа 


Схема развертывания 


Внешние системы 


Серверы "НРА 
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СТеп{ поае$ 
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Балансировщик 
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Производительность 


Количество запросов | время ответа (пт$) 


240 519 569 


ТК не подходит из-за медленного балансировщика (М$Х) 


На собственном кластере < 


НЕ) ННГоаа"" 


Ресурсы и отказоустойчивость 


* Серверные ноды Платформы: 


* Минимум 2 экземпляра — на данный момент 5х (8 СРО, 
32СЬ КАМ, 2506 $$0) 


. Хранят данные, данные на нодах различаются 
* Степень избыточности данных можно настраивать 
* Отказоустойчивость обеспечивается Араспе 1дпке 
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Ресурсы и отказоустойчивость 


.Кластер КЗ$ для Платформы и Моделей: 
. Мазег Мосе: 1х (8 СРУ, 10СЬ КАМ, 5066 01$К) 
.\\/огкег Мосе: 4х (12 СРО, 16СЬ КАМ, 150СЬ 01$К) 
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Ресурсы и отказоустойчивость 


. Клиентские поды Платформы и Моделей: 
* Минимум 1 экземпляр (масштабирование средствами К85$) 
. Не хранят состояние 
.Идентичные 
Быстрый старт новых подов средствами К8$ 
* Отказоустойчивость обеспечивается К8$ 


(но) ННЕоаа"" 


Метрики Арасрпе [1дпкКе 


. Араспе |дп%е: птх-рготе'пеи$ ехропег 
. Си ег тес$ 
. Гоа! саспе э1хе 
. Кераапсе райоп соиг( 
. Си ег омптоа ра\юп соцг{ 
. Си ег тоутпа ра{оп соип{ 


(но) ННЕоаа"" 


Метрики Арасрпе [1дпкКе 


. Араспе |дп%е: птх-рготегпеи$ ехропег 
. Моде тешс$ 
‚ Тоа| базете подез 
. АСШуе базете подез 
‚ Моде омпта ра\юп соуп{ 
‚ Ра{Кюп соци 
. Саспе зе 
Моде томпа ра{оп соипе 
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Метрики Арасрпе [1дпкКе 


. Араспе |дп%е: птх-рготегпеи$ ехропег 
. Саспе тешсз: 
. \/а!а Тог геадтоа 
. \/айа ог мгИто 
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Технологии 


Платформа: 
. Араспе |дпке 
. ауа (8 —› 11 > 17) 
. рипа 
.|ВМ МО 
. Араспе АснуеМо Ацепт!$ 
. Араспе Ка!Ка 
. Араспе Нм№е 


. Модель: 
* МКМо! —› Ру4.) -› Назк 
* РУПоп 

. МЕ -правила 
.Оаа!аке 


.РУПоп, эрагк, РузракК, 
НмеС(, Араспе Ашом/, МЕ! 


(но) ННЕоаа"* 


Конвейеры кода 


.Все: 
. Типовой С/СО (СЕЁаЬс]) 
.Развертывание средствами платформы без простоя 
*Интеграционные тесты 
.Версионирование 
* МЕ-правила и витрины: 
Ревью командой Шбаа!аке 


(но) ННЕоаа"" 


Выпуск проекта в промышленную 
эксплуатацию 


Входная [езасу Выходная 
очередь зужет очередь 


НЕ) ННГоаа 


Выпуск проекта в промышленную 


эксплуатацию 
очередь очередь 


Мем/ °ужет 


НЕ) НЕНГоаа 


Выпуск проекта в промышленную 
эксплуатацию 


Входная 
очередь 


Выходная 
очередь 


Мем/ °ужет 


НЕ) ННГоаа 


Проблемы 


* Массовые платежи от одного клиента 
. Эр Вгат кластера Араспе |дпке 
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Массовые платежи от одного 
клиента 


С Клиенты обрабатываются параллельно ^ 
ь. 4 
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Массовые платежи от одного 
клиента 


Клиенты обрабатываются последовательно 


СПеп{ А 


СПеп{ А 


Поток 1 


Поток 2 ждёт поток 1 


Поток 3 ждёт поток 2 


Поток 3 


(но) ННЕоаа"* 


Массовые платежи от одного 
клиента 


Клиенты обрабатываются параллельно 


СПеп{ А 
СПеп{ В Ое!егге Оцеце 


Сет С Поток 3 


® СПепИпЕ!ют Соищег ® [оскТите 
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5р Вгат в кластере Арасйе [дп Ке 


| Ма$ег Ра оп ВР* Васкир Ра юп 


5р Вгат в кластере Арасйе [дп Ке 


р Вгат в кластере Арасйе [дп Ке 


| Ма$ег Ра оп ВР* —Васкир Ра" юп 


р Вгат в кластере Арасйе [дп Ке 


р Вгат в кластере Арасйе [дп Ке 


Вероятность эр Вгат в кластере 
Араспе 1ап\Ке с 2 Васкир Ра|{Мюоп$ 


2 поде$ [еауе {Пе си$ег 
. 4 подез сЧиЧег: 100% 
. 5 поде$ си$ег: 5/10 = 50% 
.б подез$ си$ег: 3/15 = 20% 
‚ 7+ подез си$ег: 0% 
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Фишка: удаление данных с 
помощью эсапОиегу 


рг1уафе $Та%ф1с с\аз5 МурД\ег 1тр\етеп*5 Тдпл%еВ1Рге4тсафе<В1пагу06] ес, В1пагу0Б]ест> + 


руб 11с Боо\1еап арр\у(В1пагу06]ес+ Кеу, Влпагу0Б]есе уа\ие) {+ 
1 (уа\ие. <Тпедег>+т1е\а ("11е1а") > 100) 
гегугп. сгце: 
гефтигп Та\5е; 


19п1\е. сасйе ("МуСасве") .диегу(пем 5сапОиегу<>(пем МуР2Д\ег())); 


(но) ННЕоаа"" 


Фишка: удаление данных с 
помощью ЗсапОичегу 


рг1уафе $Та%{1с с\аз55 Мур\ег 1тр\етеп*5 Тдпл%еВ1Рге4тсафе<В1пагу06] ес, В1пагу0Б]ест> + 
@Тдп1теТп$Тапсекезоигсе 
ргтуафе фгапзлеп{ Тдп1фе 1д9п11е; 


руб 11с Боо\еап арр\у(В1пагу06]ес+ Кеу, Влпагу0Б]есе уа\ие) { 
1 (уа\ие. <Тп%едег>+1е\1а("11е1а") > 100) 


19п11е. сасйе ("'МуСаспе") .м1ИКеерВлпагу(). гетоуе (Кеу); 
гефигп Та\$е; 


19п11е. сасйе ("'МуСасве") .диегу(пем 5сапОиегу<>(пем МуРД\ег())); 


(но) ННЕоаа"" 


Резюме 


» Стандарты, стандарты, стандарты 
» Правильный выбор технологий 


» Использование принятых в организации практик 
разработки 


ы Тестирование применимости в конкретном проекте 
имеющихся в организации решений 


» Тестирование в режиме параллельной работы с 
существующей системой 
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Обратная СВЯЗЬ, 
| | комментарии и 
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